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面向 言 人 阅读 的 触觉 交互 服务 框架 构建 与 应 用 研究 
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摘要 : [目的 /意义 ] 在 全 民 阅 读 的 推广 过 程 中 ,满足 视 障 人 群 的 阅读 需求 、 保 证 其 阅读 权益 具备 重要 的 社 
会 意义 。 针 对 网 络 时 代 人 们 的 阅读 习惯 和 兴趣 从 传统 的 文本 向 文字 、 图 像 和 图 形 等 多 元 化 进行 拓展 的 发 展 赵 
势 ,通过 对 盲人 阅读 和 力 触觉 自然 交互 的 相关 问题 进行 探讨 ,提出 一 种 面向 盲人 阅读 的 触觉 交互 服务 框架 
[方法 /过 程 ] 盲人 阅读 的 触觉 交互 服务 框架 在 对 触觉 认 知 规律 感知 特性 进行 分 析 的 基础 上 ,重点 阐述 触觉 对 
象 建 构 、 触 觉 智能 交互 和 触觉 信息 呈现 等 盲人 阅读 中 的 关键 技术 。 引 入 典型 的 笔 式 触觉 再 现 设备 构 建 面向 讶 
人 阅读 的 触觉 Viri die D asd 息 资 源 触觉 阅读 的 有 效 性 和 不 同 层级 信息 资源 的 可 理解 性 进 
行 实验 。[ 结果 /结论 ] 实验 结果 表明 ,该 平台 在 信息 资源 的 育 人 阅读 方面 拥有 良好 的 沉浸 感 、 交 互 性 和 可 行 
d. 同时 验证 不 同 层级 的 信息 资源 在 触觉 阅读 和 理解 的 难度 上 存在 着 差异 ,而 干预 训练 的 合理 引入 可 有 效 提 
性 台 作 者 对 信息 资源 的 感知 和 识别 能 力 。 

LO 关键 词 : 数字 信息 资源 盲人 阅读 力 触 党 交互、 触觉 对 象 建构 干预 训练 
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图 
损 ,需要 借助 自身 的 其 它 感知 能 力 来 补偿 受 损 的 视 
阅读 作为 人 类 获取 传播 共享 知识 的 重要 方式 ， à 


il 觉 能 力 。 当 前 主流 的 补偿 方法 分 为 听觉 和 触觉 两 种 ， 
对 一 个 国家 和 民族 的 素养 提升 ,文明 传承 具有 重要 作 


" pests aa de 前 者 将 视觉 信号 转换 为 音频 信号 ,通过 文本 朗读 的 
"EA apoE A 25 E a, [E] A] E RE T 

后 近年 来 ,全 民 阅 读 活动 日益 受到 觉 和 国家 的 高 度 — 式 进行 信息 的 传递 ;后 者 则 是 将 视觉 信号 转换 为 和 
18385,2012 4E 11. 月 ,党 的 十 八大 报告 提出 “开展 全 民 


xs mde : 信号 ,用 户 借助 于 力 触 党 真实 地 感知 图 文 信息 。 触 党 
MES 2014 年 以 来 ,国务 院 连 续 4 年 把 AFE 。 方式 一 般 是 指 将 传统 文字 翻译 为 专 为 言 人 设计 的 凸 点 
a Euh Maui o 言 文 以 便于 言 人 感知 ,该 方式 是 现 阶段 最 基本 的 阅读 
Pi a E 方式 。 然 而 在 实际 应 用 的 过 程 中 ,该 方式 容易 受到 谨 
fü en US IUSSIT PUN eeu «E 
人 BRE fg 相 比 于 触觉 方式 ,听觉 方式 适合 于 无 听觉 障碍 的 视 障 
阅读 需求 ,而 且 还 应 兼顾 不 同人 群 阅读 能 力 的 差异 


SCA BURRO RRGEHUE ND, uinna C RATETA A BUTS ZI 
人 的 数目 为 8 296 Jia re Jy ay 矣 ,因此 更 易于 被 视 谭 人 二 理解 和 接受 ;此 人 外, 在读 
LAB UB LS. BE AEA RO] NERSE A AAR GUESS. 

s Aid 而 面 对 图 像 . 图 形 等 信息 资源 的 阅读 和 认 知 , 现 有 的 补 


PNEU EISE AREL RAI 人 方式 无 论 是 听觉 还 是 触觉 都 未 能 很 好 地 解决 这 一 问 
重要 的 社会 意义 和 应 用 价值 。 


题 。 
在 阅读 过 程 中 ,人 们 主要 通过 视觉 来 获取 外 部 的 


rm 
证 过 
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随 着 数字 媒体 技术 的 发 展 和 计算 机 通讯 网 络 的 应 
用 普及 ,图 像 作为 重要 的 信息 载体 ,在 知识 和 信息 传播 
中 的 作用 更 加 凸显 。 与 此 同时 ,人 们 的 阅读 习惯 和 兴 
趣 逐 步 发 生 转 变 , 开 始 从 传统 的 文本 形式 向 文字 、 图 像 
和 图 形 等 多 元 化 方面 发 展 。 针 对 这 一 发 展 趋势 ,如 何 
借助 现代 信息 技术 帮助 视 障 群体 有 效 地 认 知 和 学 习 图 
像 .图 形 等 信息 资源 就 显得 尤为 重要 。 


提供 了 新 的 发 展 机 遇 ,相关 研究 工作 获得 进一步 推进 。 
张 冰 梅 等 人 通过 问卷 的 方式 对 视 障 读者 阅读 的 时 间 、 
途径 和 需求 进行 调研 ,显示 视 障 读者 逐步 实现 从 传统 
的 盲文 纸 质 阅读 向 全 媒体 阅读 的 转变 趋势 ,并 在 此 基 
础 上 ,探讨 了 公共 图 书馆 改善 视 障 读 者 无 障碍 服务 的 
应 对 策略 ” 。 

同时 ,部 分 研究 者 也 从 盲人 阅读 的 辅助 设备 出 发 


在 对 盲人 阅读 和 力 触觉 自然 交互 的 相关 研究 进行 
文献 回顾 的 基础 上 ,笔者 致力 于 提出 一 种 面向 盲人 阅 
读 的 触觉 交互 服务 框架 。 通 过 对 触觉 认 知 规律 .感知 
特性 进行 分 析 ,重点 阐述 触觉 对 象 建构 、 触 觉 智能 交互 
和 触觉 信息 呈现 等 盲人 阅读 中 的 关键 问题 。 同 时 通过 


开展 研究 ,阅读 辅助 设备 主要 分 为 电子 盲文 点 显 器 " 
和 电子 触觉 图 像 显 示 器 "” 。 前 者 用 于 将 普通 文字 动 
态 显 示 成 育 文 ,以 便 为 盲人 提供 良好 的 文本 阅读 体验 ; 
后 者 通过 将 视觉 中 像素 鞭 换 成 触 点 的 方式 ,实现 图 像 、 
图 形 等 信息 的 呈现 。 考 虑 到 电子 触觉 图 像 显 示 器 中 图 


实验 和 应 用 实例 实现 对 文字 .图像 和 图 形 等 信息 资源 
的 触觉 再 现 ,并 对 实验 的 数据 进行 分 析 。 最 后 ,对 本 研 
究 春 在 的 问题 和 后 续 的 研究 工作 做 简要 县 述 。 


2 ”文献 回顾 


己 本 节 从 盲人 阅读 与 力 触觉 自然 交互 两 个 方面, 对 


盲人 阅读 
入 J 随 着 社会 的 发 展 和 科技 的 进步 ,特殊 群体 尤其 是 
视 铭 人士 的 阅读 问题 越 来 越 引起 人 们 的 关注 。 研 究 者 
从 放 同 的 视角 对 盲人 阅读 开展 相关 研究 工作 。 林 英 以 
视 胃 障碍 者 为 调查 对 象 ,通过 问卷 的 方式 了 解 该 人 群 
的 陪读 现状 ,及 其 在 阅读 方面 获取 的 社会 支持 情况 ”。 
局 绪 研究 中 ,其 进一步 归纳 了 视 障 人 十 阅读 的 3 种 
让 要 方式 :触觉 阅读 、 视 党 阅读 和 听 党 阅读, 并 对 不 同 
冰 溪 方式 所 适用 的 人 群 进行 具体 的 分 析 " 。 李 肖 则 从 
阅读 资源 的 状况 出 发 ,分 析 了 目前 我 国 盲 人 阅读 资源 
建设 现状 ,并 对 建设 中 或 待 解决 的 问题 进行 盖 述 ”。 
由 于 公共 图 书馆 是 视 障 人 群 获 取信 息 的 重要 来 源 ,部 
分 学 者 着 眼 于 公共 图 书馆 对 盲人 阅读 进行 研究 。 张 靖 
等 人 在 梳理 和 分 析 加 拿 大 公共 图 书馆 残障 用 户 服务 
时 ,着重 从 特殊 馆藏 .辅助 设备 . 馆 员 服务 等 多 个 角度 
对 视 障 人 群 的 阅读 服务 情况 进行 了 关注 5 。 王 林 军 通 
过 分 析 俄 罗斯 盲人 图 书馆 的 宣传 活动 ,为 我 国 公 共 图 
书馆 视 障 阅 读 服 务工 作 提 供 相应 的 借鉴 和 参考 。 陈 
艳 伟 从 国内 视 障 读者 数字 阅读 的 角度 ,分 析 国内 公共 
图 书馆 数字 视 障 服务 的 现状 和 存在 的 问题 ,并 从 多 方 
面 给 出 数字 视 障 服务 的 改进 策略 。 圳 丽华 以 视 障 读 
者 的 满意 度 作为 衡量 图 书馆 无 障碍 阅读 服务 质量 的 重 
要 标准 ,从 视 障 读者 的 角度 对 无 障碍 阅读 活动 的 效果 


像 展 示 仍 然 是 以 传统 视觉 认 知 的 方式 表达 ,与 盲人 通 
过 手指 触摸 和 理解 图 像 的 方式 本 质 上 有 所 不 同 ,因此 ， 
清华 大 学 的 研究 团队 ”从 用 户 体验 的 角度 ,总 结 和 提 
出 了 盲人 触觉 图 像 的 设计 准则 ,以便 在 阅读 过 程 中 有 
效 提升 盲人 获取 信息 的 效率 。 
2.2 力 触觉 (自然 ) 交 互 

近年 来 ,伴随 着 新 型 交互 设备 不 断 涌现 ,人 与 信息 
空间 的 联接 朝 着 更 加 自然 ,便捷 和 高 效 的 方向 进行 演 
进 。 交 互 界面 也 经 历 着 从 人 适应 机 融 到 机 器 不 断 适应 
人 的 发 展 变迁 ,以 “人 为 中 心 ” 的 自然 用 户 界面 正成 为 
未 来 人 机 交互 发 展 的 主要 方向 。 与 语音 交互 .视觉 交 
互相 似 , 力 触觉 交互 作为 一 种 新 型 的 自然 交互 方式 ,在 
人 们 信息 交流 和 沟通 中 的 作用 日 益 显 著 。 借 助 相应 的 
力 触 觉 设备 ”" ,人 们 可 以 脱离 复杂 深奥 的 图 形 用 户 
界面 限制 ,越过 繁琐 的 菜单 和 参数 选择 ,以 自由 、 真 实 
的 方式 触摸 .操纵 和 感知 虚拟 场景 中 事物 ,从 而 获取 良 
好 的 逼真 感 和 沉浸 感 。 依 据 人 体感 受 器 的 差异 ,人 的 
力 触觉 具体 可 分 为 皮肤 感受 的 触感 和 关节 韧带 感受 的 
力 感 ” ,通常 情况 下 这 两 种 感觉 相互 交织 ,表现 出 交 
融 呈 现 的 情形 。 机 器 为 了 模拟 这 两 种 感受 , 则 形成 了 
触觉 感知 (tactile perception ) 和 力 反 馈 (force feedback ) 
技术 。 前 者 主要 是 通过 物体 表面 的 振动 .纹理 和 温度 
来 识别 触摸 的 对 象 ,后 者 则 是 通过 重量 .人 硬度 和 摩擦 力 
等 因素 对 接触 对 象 进行 判别 。 

经 过 几 十 年 来 的 努力 ,触觉 交互 在 硬件 和 算法 层 
面 都 取得 了 长 足 进步 。 在 硬件 层面 ,各 种 类 型 的 触 党 
交互 设备 不 断 涌 现 , 从 早期 面向 桌面 和 Web 体验 的 力 
反馈 鼠标 到 现今 适用 于 三 维 空间 和 VR 情境 的 手指 套 
环 . 触 觉 手套 等 ”” ,小 型 化 .自然 性 、 穿 戴 式 和 柔性 
化 正 逐 步 成 为 触觉 交互 设备 发 展 的 主要 趋势 。 在 算法 
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进行 了 评估 分 析 ” 。 数 字 网 络 和 信息 技术 为 盲人 阅读 


层面 ,Phantom 力 触觉 设备 的 问世 掀起 了 力 触觉 生成 方 
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法 的 研究 热潮 ,典型 算法 包括 God -object ^" , Virtual 
proxy? 等 ,这 些 算法 的 提出 使 指 尖 与 各 种 物体 间 虚 拟 
交互 成 为 可 能 ,并 带 给 人 们 前 所 未 有 的 精确 、 便 捷 的 触 
觉 激励 。 在 近 十 几 年 , 力 触觉 交互 开始 与 具体 的 应 用 
领域 相 结 合 ,呈现 出 由 科学 专业 领域 向 日 常生 活 进行 
扩散 的 趋势 。 在 服务 于 视 障 人 群 方面 ,最 为 典型 的 应 
用 是 触觉 导航 ,国外 的 J. Borenstein 等 为 视 障 人 士 
开发 了 一 款 名 为 GuideCane 的 导航 系统 ,其 以 导 盲 杖 
为 原型 ,通过 超声 波 检测 周边 的 障碍 物体 ,并 利用 与 距 
离 成 反比 的 振动 反馈 为 用 户 提供 导航 信息 。0. Lahav 
等 吕 则 在 盲人 定向 行走 技能 学 习 和 虚拟 训练 中 引入 
触觉 反馈 ,研究 表明 该 方法 可 帮助 盲人 构建 有 效 的 认 
知 地 图 ( Cognitive Mapping) ,提升 其 对 未 知 空间 的 认 知 
和 探索 能 力 。 针 对 博物 馆 中 资源 和 服务 的 可 访问 性 问 
RT H. Park 等 号 则 利用 触觉 交互 ,并 结合 深度 相机 
和 远程 机 器 人 ,构建 起 基于 触觉 界面 的 远程 博物 馆 访 


"1 


方面, 力 触 觉 再 现 被 引入 到 科学 概念 和 抽象 几何 信息 
的 台 习 过 程 中 ,用 于 帮助 人 们 更 好 地 理解 基础 知识 ,使 
党 可 充满 趣味 和 交互 性 ,主要 研究 包括 :H. N，Kim 和 
Lon 等 “疏通 过 触觉 方式 为 视觉 障碍 的 学 生 进 行 


拢 温度. 力 等 物理 学 相关 科学 概念 呈现 等 。 与 非 触觉 
仿 袜 相 比 , 融 入 力 触觉 的 多 模 态 呈现 环境 可 给 用 户 有 
训 通 提供 感性 经 验 ,实现 知识 的 有 效 传递 。 
己 文 献 综述 表明 ,以 往 盲 人 阅读 服务 方面 的 研究 主 
要 美 注 于 现状 .问题 和 措施 等 理论 层面 的 探讨 ,然而 ， 
尚 力 从 应 用 层面 开展 相关 研究 工作 。 另 外 , 力 触 觉 交 
互 技术 方面 的 理论 和 算法 基本 成 熟 ,并 逐步 与 具体 的 
应 用 领域 相 结 合 。 笔 者 认为 新 型 自然 人 机 交互 的 发 展 
和 成 熟 可 为 言 人 阅读 的 研究 工作 提供 新 的 研究 视角 和 
思路 ,笔者 拟 将 盲人 阅读 和 力 触觉 自然 交互 技术 相 结 
合 ,从 应 用 的 角度 对 研究 工作 进行 探讨 。 
3 ”触觉 交互 服务 框架 

笔者 通过 将 力 触觉 ( 自然) 交互 技术 引入 盲人 阅 
读 领 域 ,提出 一 种 面向 视 障 人 士 阅读 的 触觉 交互 服务 
框架 ( 见 图 1) 。 所 构建 的 触觉 交互 服务 框架 细 分 为 5 


ii n 


H 设 备 〈 屏幕、 音箱 等 | | 新 型 交互 设备 ( 触 屏 、 触 杆 等 ) 


智能 交互 层 


触觉 对 象 的 建构 


| 信息 资 源 库 OOM, E 


图 1 面向 盲人 阅读 的 触觉 交互 服务 框架 


交互 设备 的 信息 则 与 应 用 场景 中 设备 选取 情况 密切 相 
关 。 操 作 处 理 层 是 负责 将 信息 资源 库 中 的 数字 资源 构 
建成 语义 明确 ,便于 理解 的 触觉 对 象 ,同时 提取 交互 行 
为 数据 的 特征 ,并 结合 交互 设备 信息 生成 操作 序列 。 
智能 交互 层 是 框架 的 核心 部 分 ,主要 负责 操作 序列 与 
触觉 对 象 间 的 交互 以 及 用 户 意图 的 感知 识别 , 触 碰 检 
测 的 引入 使 用 户 能 真实 地 触摸 和 感知 对 象 的 表面 和 相 
应 特征 ,实现 触觉 交互 和 信息 交流 。 交 互 设备 层 主要 
是 将 计算 得 到 的 触觉 信息 进行 触觉 演 染 ,通过 力 感 或 
触感 的 形式 传递 给 操作 者 ;该 层 中 视听 觉 辅助 信息 的 
呈现 可 在 监督 盲人 的 阅读 过 程 、 优 化 和 提升 认 知 阅读 
效果 的 同时 ,被 用 作 帮 助 具 有 残余 视力 的 视 障 人 士 进 
行 触 党 认 知 。 以 育 人 感知 螺纹 木质 球 为 例 , 触 党 交互 
服务 的 基本 流程 是 :首先 ,将 数字 资源 通过 转换 机 制 处 
理 成 触觉 对 象 ,分 别提 取出 轮廓 特征 一 一 球形 、 材 质 特 
征 一 一 木质 .纹理 特征 一 一 螺旋 等 ;其 次 , 视 障 人 士 的 
手 部 运动 状态 通过 运动 映射 算法 转化 为 用 户 隐 喻 (如 
3D 光标 虚拟 手 等 ) ;然后 ,在 虚拟 环境 中 用 户 隐喻 和 
触觉 对 象 之 间 触 碰 状 态 与 区 域 等 信息 能 被 实时 捕获 ， 
阅读 过 程 中 根据 指 尖 或 用 户 隐 喻 触 碰 的 轮廓 、 材 质 和 
纹理 特征 计算 出 触感 和 受 力 情况 ;最 后 ,分 析 得 到 的 力 
触觉 信息 经 由 触觉 交互 设备 作用 于 指 尖 或 手 部 位 置 进 
行 合理 化 呈现 。 应 用 服务 层 是 依托 前 面 4 层 进行 构建 
并 开展 服务 ,其 既 包 括 满足 视 障 用 户 功 能 型 需求 的 服 
务 , 又 涉及 到 知识 情境 模拟 、 认 知 能 力 训练 等 新 型 的 服 
务 形式 ,可 满足 用 户 不 同 层级 的 阅读 需求 。 服 务 框架 
的 5 个 层级 之 间 层 层 递 进 , 互 为 补充 ,可 提供 给 视 障 用 
户 自然 、 高 效 和 智能 的 触觉 交互 服务 体验 。 


c 


个 部 分 : 数据 资源 层 、 操 作 处 理 层 、 智 能 交互 层 、 交 互 
设备 层 和 应 用 服务 层 。 

数据 资源 层 是 服务 框架 中 上 面 4 层 的 基础 ,为 上 
层 计 算 提 供 了 所 需 的 数据 支持 , 它 主 要 分 为 文档 \、 图 
像 .图 形 等 数字 资源 和 实时 采集 的 用 户 动作 行为 数据 ， 
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在 下 文中 ,笔者 将 对 中 间 3 层 的 核心 内 容 进行 详 
细 描 述 ,3.1 节 主 要 描述 的 是 操作 处 理 层 中 触觉 对 象 
的 建构 ;考虑 到 智能 交互 层 中 叙述 篇 幅 较 大 以 及 信息 
感知 呈现 与 交互 设备 层 的 内 在 关联 ,因此 , 3.2 节 触 觉 
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智能 交互 主要 涉及 图 1 中 的 触 碰 位 置 检测 和 意图 智能 
理解 ,信息 感知 呈现 则 与 交互 设备 层 的 相关 内 容 构 成 
3.3 节 触 觉 信息 呈现 。 为 了 保证 实际 触觉 阅读 中 的 效 
果 , 在 3.4 节 介 绍 干预 训练 机 制 ,以 保证 用 户 现 有 知识 
结构 和 触觉 感知 对 象 之 间 的 合理 映射 。 
3.1 触觉 对 象 的 建构 

考虑 到 人 的 生理 学 特性 和 触觉 感知 特点 “” ,如 
何 从 触觉 认 知 角度 构建 语义 明确 、 便 于 理解 的 触觉 对 
象 就 显得 尤为 重要 。 触 觉 对 象 主 要 分 为 文字 、 图 像 和 
图 形 3 类 , 它 的 认 知 过 程 应 遵循 由 浅 入 深 逐步 递 进 的 
原则 。 就 文字 而 言 , 视 障 人 士 认 知 的 文字 主要 是 盲文 
(也 被 称 之 为 点 字 或 凸 字 ) ,是 一 种 专 为 盲人 设计 、 靠 
触觉 感知 的 文字 。 盲 文 点 字 一 般 由 6 个 点 组 成 , 呈 3 
行 2= 列 的 排 布 方式 , 左 侧 从 上 到 下 1、2、3, 右 侧 从 上 到 
RUEDA RAM E 研究 发 现 , 我 国 


"译文 的 组 成 以 方 为 单位 ,个 汉字 由 
合 完成 。 盲 文 出 版 的 困境 ”和 盲人 群体 较 
We 种 数字 化 的 触觉 认 字 和 阅 
谈 马 案 的 重要 性 。 笔 者 对 视 障 人 群 的 盲文 阅读 现状 和 
同 四 进行 调研 访谈 ,获得 如 下 启示 :在 言 文 的 触觉 构建 
过 各 中 ,触觉 感知 的 方式 点 距 方 距 以 及 分 词 等 因素 
感 深 行 特殊 考虑 ,相关 参数 应 可 根据 读者 阅读 特点 和 
认 径 习惯 进行 个 性 化 调整 。 同 时 在 具体 的 学 习 和 阅读 
书香 中 ,应 首先 提供 对 汉字 讶 文中 声母 . 介 母 和 韵母 的 
学 加 和 认 知 , 然 后 逐步 深入 实现 字 、 词 \ 句 和 篇 的 递 进 


式 的 知识 建构 ,相关 经 验 可 为 图 像 ,图形 等 信息 资源 的 
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图 像 是 触觉 对 象 中 最 为 关键 的 一 环 , 它 的 存在 有 
助 于 人 们 构建 一 种 形象 的 思维 模式 ,便于 人 们 学 习 和 
思考 问题 。 而 图 形 通常 被 理解 是 简单 凸 起 形状 的 二 维 
呈现 , 相 比 于 包含 丰富 细节 信息 的 图 像 ,图 形 的 触觉 构 
建 较为 简单 ,涉及 的 主要 是 形状 轮廓 特征 ,因此 笔者 拟 
将 这 两 者 放 于 一 起 进行 探讨 。 常 用 的 图 像 特征 包括 轮 
廓 形状 特征 、 材 质 特征 、 纹 理 特征 、 颜 色 特征 以 及 空间 
关系 特征 5 类 ,笔者 按照 由 简单 到 复杂 ,从 整体 到 局 部 
的 方式 对 这 些 特征 划分 层级 。 在 具体 的 阅读 过 程 中 ， 
视 障 人 士 可 从 低层 级 出 发 进行 感知 ,并 根据 自身 需求 
自主 选择 更 高 层级 的 内 容 , 划 分 的 具体 方式 为 : 轮廓 
形状 特征 、 材 质 特征 为 第 一 层 ,纹理 特征 .颜色 特征 为 
第 二 层 ,空间 关系 特征 则 位 于 最 高 层 。 轮 廓 形状 主要 
是 用 来 描述 形状 的 总 体 特征 cm ,材质 则 体现 为 接触 物 
表面 的 粗糙 度 .硬度 和 温度 等 信息 ” ,这 两 者 可 让 阅 


读者 对 图 像 有 一 个 直观 、 全 局 的 初步 认识 。 图 像 纹理 
为 图 像 的 某 种 局 部 性 质 , 或 是 对 图 像 局 部 区 域 中 像素 
之 间 关 系 的 一 种 度量 。 在 计算 机 图 形 学 中 ,图 像 纹 
理 主 要 涉及 两 方面 的 内 容 : 物体 表面 凹凸 不 平 的 沟 纹 
以 及 光滑 表面 的 彩色 图 案 。 笔 者 主要 关注 前 者 ,彩色 
图 案 和 颜色 特征 具有 共通 之 处 ,因此 放 在 颜色 特征 中 
进行 统一 讨论 。 我 们 知道 图 像 是 真实 世界 中 三 维 物体 
在 二 维 平面 上 的 投影 ,其 本 身 并 不 具有 高 度 信息 。 因 
而 ,在 图 像 纹 理 触觉 呈现 的 时 候 , 应 考虑 为 其 恢复 合适 
的 高 度 信息 ,以 保证 凸凹 感 在 触 党 上 的 合理 呈现 。 

依据 相关 人 士 的 函 询 记 录 和 阅读 的 参考 文献 , 笔 
者 发 现 对 视 障 人 士 (尤其 是 全 盲人 士 ) 而 言 ,颜色 特征 
几乎 是 一 种 不 能 被 理解 和 感知 的 特征 ;而 视 障 人 士 由 
于 长 期 视觉 缺失 的 缘故 ,部 分 人 的 空间 思维 能 力 相 对 
较 差 。 对 于 前 者 ,需要 时 可 借鉴 文献 ”的 研究 思路 ， 
构建 颜色 和 空间 感 的 心理 学 效应 ,人 研究 表明 :心理 学 效 
应 会 受到 人 的 主观 条 件 和 个 性 因素 的 影响 ,但 共同 的 
生活 条 件 和 社会 环境 促使 共性 的 心理 认 知 的 形成 。 如 
暧 色调 拥有 扩散 效应 ,给 人 以 前 进 、 凸 起 .靠近 的 感觉 ; 
而 冷色 调 则 与 之 相反 ,给 人 的 感觉 表现 为 后 退 E 
远离 。 从 这 个 角度 来 看 ,可 在 阅读 的 过 程 中 提供 给 阅 
读者 不 同 的 空间 距离 感 ,实现 空间 感到 颜色 的 反 向 映 
射 。 上 述 两 者 用 户 可 根据 个 人 需要 自主 选择 ,便于 加 
深 对 细节 的 理解 。 为 了 避免 在 图 像 阅 读 的 初期 给 用 户 
造成 过 多 干扰 ,本 文 的 实验 环节 主要 关注 前 面 3 类 特 
征 , 对 后 两 类 暂 不 进行 验证 。 
3.2 ”触觉 智能 交互 

在 建构 好 触觉 对 象 之 后 ,人 们 期 望 在 各 类 交互 情 
境 中 实现 与 触觉 对 象 的 信息 对 话 。 在 此 过 程 中 ,如 何 
精准 地 检测 交互 的 位 置 、 如 何 让 机 器 智能 地 理解 人 类 
的 意图 、 如 何 对 用 户 的 交互 给 出 自然 真实 的 体验 是 我 
们 想 要 探究 和 解决 的 问题 。 

依据 交互 情境 的 差异 ,与 触觉 对 象 的 交互 可 从 二 
维 平面 和 三 维 空间 两 个 层面 进行 讨论 。 典 型 的 平面 交 
互 情境 是 配备 触摸 屏 的 移动 终端 ,移动 终端 现 已 在 音 
频 和 视觉 交互 方面 取得 显著 进步 ,可 提供 给 人 们 极为 
丰富 ,多样 的 视听 觉 信息 。 但 在 触觉 交互 方面 ,任何 信 
息 在 触摸 屏 上 的 呈现 都 是 简单 .单调 的 (玻璃 ) 质感 ， 
言 息 资 源 在 触 党 上 的 表达 方式 极为 有 限 甚至 匮乏 ,很 
难 满足 视 障 群体 在 新 的 历史 时 期 通过 触觉 进行 阅读 、 
获取 信息 的 渴望 。 面 对 这 样 的 痛 点 ,研究 者 采用 的 总 
体 思路 是 通过 定量 的 转换 模型 将 视觉 信息 转 为 触觉 信 
息 ,并 在 指 尖 实现 触觉 呈现 ,具体 的 解决 方案 可 分 为 两 
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类 :中 从 触摸 屏 本 身 出 发 ,在 现 有 触摸 屏 结构 中 添加 触 
觉 再 现 面板 层 ,用 于 产生 静电 力 触觉 刺激 ;@@ 设 计 
面向 移动 终端 的 可 穿戴 式 的 触觉 再 现 设备 ”。 分 析 
现 有 的 研究 成 果 , 笔 者 认为 后 者 是 现 阶段 或 未 来 短期 
内 有 可 能 落地 的 方案 ,基本 流程 是 用 户 的 手指 末端 直 
接 与 触摸 屏 进 行 交 互 ,根据 触摸 位 置 获取 目标 像素 点 ， 
通过 图 像 处 理 算法 解 算出 对 应 像素 点 的 特征 信息 ,最 
后 依据 这 些 信息 驱动 触觉 交互 设备 的 执行 单元 产生 可 
控 的 力 触 觉 交 互 效 果 。 而 在 VR 为 代表 的 三 维 情境 
下 ,触觉 交互 是 借助 交互 设备 (3D 和 鼠标、 触觉 手套 ) 通 
过 用 户 隐 喻 (3D 光标 、 虚 拟 手 等 ) 对 虚拟 对 象 进行 操作 
的 拟 实 交 互 。 与 平面 交互 情境 不 同 ,在 三 维 虚拟 空间 
中 ,同一 时 刻 两 个 甚至 多 个 对 象 之 间 有 可 能 出 现 空间 
亿 睡 上 的 重 秋 ,此 时 就 需 用 碰撞 检测 算法 来 判断 用 


nd 


没有 力 触 感 , 视 障 人 士 将 无 法 有 效 感知 图 像 .图 形 等 信 
息 资源 。 具 体 而 言 ,其 可 分 为 力 触觉 计算 和 力 触觉 再 
现 两 部 分 内 容 , 力 触觉 计算 是 指 根据 阅读 过 程 中 指 尖 
或 用 户 隐 喻 的 运动 对 触感 和 受 力 情况 进行 分 析 , 力 触 
觉 再 现 则 借助 触觉 交互 设备 对 力 触 觉 信息 进行 合理 化 
呈现 。 

当前 ,在 触觉 感知 技术 中 有 关 温 度 和 振动 此 类 信 
息 的 模拟 已 较为 成 熟 。 以 振动 触觉 反馈 为 例 ,通过 设 
定 不 同 的 频率 和 振幅 可 提供 多 样 化 的 触感 信号 ,其 已 
被 广泛 应 用 于 育 杖 导航 、 智 能 手机 和 VR 手柄 之 中 。 
但 当面 对 图 像 ,图形 等 信息 资源 的 触摸 和 感知 时 ,振动 
反馈 的 方式 很 难 满足 人 们 在 操作 过 程 中 对 于 高 精度 、 
细腻 性 和 沉浸 式 的 认 知 需求 。 因 此 ,对 于 图 像 .图 形 等 
言 息 资源 的 判别 ,应 选取 力 觉 反 馈 作 为 基本 感知 方式 ， 


户 企 喻 和 触觉 对 象 间 是 否 发 生 接触 。 为 了 有 效 提高 算 
法 的 效率 ,检测 过 程 应 分 为 两 个 阶段 : 粗 粒 度 检测 和 细 
于 检测 。 在 粗 粒度 检测 阶段 ,应 快速 吻 除 确定 不 会 
发 第 触 碰 的 触觉 对 象 ,以 达到 初步 过 滤 的 效果 ;对 阅读 
进程 中 可 能 发 生 触 碰 的 物体 , 则 需要 进一步 进行 细 粒 
度 疯 检测 ,获取 触 碰 发 生 的 时 刻 和 对 象 的 表面 位 置 。 
咸 局 , 当 触 磁 或 交互 发 生 时 算法 输出 必要 的 力 触觉 信 
外 从 而 保证 整个 三 维 情境 触觉 阅读 过 程 的 真实 感 和 
尝 油 感 。 此 外 ,平面 交互 情境 下 在 跟踪 屏幕 上 的 交互 
点 区 基础 上 ,对 手指 的 姿势 .按压 力 等 主动 交互 信息 应 
项 重 进 行 考虑 ;三 维 空间 情境 下 在 触 磁 和 抚摸 图 像 图 
形 阁 信息 资源 的 基础 上 ,从 选择 (选取 .缩放 等 操作 ) 
与 操纵 ( 抓 取 平 移 和 旋转 等 ) 两 个 层面 ”实现 视 障 人 
每 触 觉 对 象 多 样 化 的 交互 操作 也 尤为 重要 。 
传统 的 交互 系统 以 机 器 为 中 心 ,用 户 意图 的 表达 
依赖 于 系统 命令 的 执行 ,总 体 的 交互 过 程 中 人 的 认 知 
和 操作 负荷 较 重 ,交互 效率 有 待 提高 。 在 触觉 交互 服 
务 中 ,我 们 期 望 视 障 人 士 能 逐步 摆脱 以 机 器 为 中 心 的 
束缚 ,在 阅读 过 程 中 能 集中 精力 于 信息 资源 本 身 , 依 托 
力 触感 实现 “人 为 中 心 "的 交互 阅读 方式 5 。 因 此 , 通 
过 借鉴 人 机 交互 领域 的 最 新 思想 ,尝试 将 “智能 "引入 
至 触觉 交互 ,以 使 机 器 ( 系统) 的 认 知 能 力 得 到 提升 。 
基本 思路 是 在 分 析 和 抽取 用 户 操作 基本 特征 的 基础 
上 ,构建 理解 用 户 意图 的 算法 ,并 结合 上 下 文 知识 推理 
特定 情境 下 用 户 的 交互 意图 。 相 关 研 究 5 也 表明 采 
用 意图 驱动 的 系统 能 较 好 地 提升 交互 自然 性 和 交互 效 
率 ,有 效 地 降低 用 户 的 操作 负担 和 认 知 负担 。 
33 ”触觉 信息 呈现 
触觉 信息 呈现 是 触觉 交互 服务 的 基础 性 工作 , 若 
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振动 反馈 等 则 作为 辅助 提醒 手段 。 当 接触 到 触觉 对 象 
的 轮廓 形状 或 对 触觉 对 象 进行 操作 时 ,应 能 让 用 户 感 
受到 触感 , 即 提供 必要 的 反作用 力 。 触 觉 对 象 表面 材 
质 的 刻画 应 从 硬度 和 粗糙 度 两 个 层面 进行 考虑 , 软 硬 
程度 是 通过 反馈 力 的 大 小 进行 调节 ,粗糙 度 则 可 通过 
添加 与 运动 方向 相反 的 摩擦 力 进行 模拟 。 和 触觉 对 象 的 
沟 纹 特征 是 在 恢复 触摸 区 域 表 面 高 度 值 的 基础 上 , 依 
据 梯 度 表 面 对 力 触觉 信号 进行 修正 从 而 产生 触觉 上 四 
凸 感 。 有 关 力 触觉 计算 方面 的 详细 信息 ,请 参见 前 期 
的 研究 成 果 ” 。 

在 力 触觉 计算 的 基础 上 , 现 有 触觉 再 现 的 基本 模 
式 分 为 主动 和 被 动 两 类 。 其 中 ,被 动 模式 是 指 受 到 环 
境 因素 或 牵引 力 等 影响 下 系统 自动 响应 过 程 ,一 般 与 
用 户 隐 喻 是 否 接 触 对 象 无 关 。 主 动 模 式 是 指 接 触 触 觉 
对 象 的 情况 下 ,操作 者 主动 地 进行 探索 和 感知 。 笔 者 
认为 育 人 阅读 触觉 过 程 中 应 采用 被 动 响应 和 主动 感知 
相互 结合 的 方式 作为 基本 框架 。 就 具体 的 呈现 装置 而 
言 , 指 戴 式 .穿戴 式 或 者 笔 式 触 党 再 现 设备 等 都 可 作为 
力 觉 或 触 党 信息 合理 化 呈现 的 接口 ,在 实践 过 程 中 用 
户 可 根据 自己 的 需求 和 条 件 进 行 自主 选择 。 
3.4 干预 训练 机 制 

对 于 视 障 人 士 而 言 ,文字 、 图 像 和 图 形 等 信息 的 获 
取 大 多 通过 手指 触摸 的 方式 来 完成 ,这 与 常人 使 用 眼 
青 了 解 外 部 世界 有 所 不 同 。 在 实际 触觉 阅读 的 过 程 
中 ,研究 者 发 现 视 障 人 士 的 触觉 阅读 效果 会 受到 自身 
现 有 的 知识 结构 、 触 摸 行为 偏好 以 及 所 构建 的 触觉 对 
象 等 因素 的 影响 。 因 而 在 阅读 过 程 中 保证 用 户 现 有 知 
识 结构 和 所 感知 对 象 之 间 的 合理 映射 就 显得 极为 重 
要 ,其 将 对 阅读 效果 的 好 坏 起 到 很 大 的 影响 。 研 究 表 
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明王 预 训练 对 于 人 们 掌握 知识 、 理 解 概念 有 着 显著 影 
g^ ,因此 , 当 视 障 人 士 遭 遇 到 在 其 现 有 知识 结构 下 
感知 到 的 触觉 对 象 无 法 被 有 效 认 知 时 ,干预 训练 的 合 
理 引 入 为 解决 此 问题 提供 了 很 好 的 思路 ,图 2 为 笔者 
提出 的 干预 训练 机 制 的 流程 图 。 在 具体 的 触觉 阅读 过 
程 中 ,可 能 会 出 现 以 下 3 种 情形 :@ 触觉 感知 的 结 

与 视 障 人 士 的 现 有 知识 结构 出 现 偏差 或 混淆 的 情况 ， 
此 时 于 预 训练 机 制 需 对 受训 者 进行 干预 训练 ,以 纠正 
阅读 过 程 中 的 认 知 误差 ,实现 对 象 认 知 的 合理 匹配 ; 
(2) 当 视 障 人 士 对 触觉 对 象 进行 触觉 感知 后 , 若 此 时 其 
脑海 中 并 未 出 现 对 应 对 象 的 相关 概念 , 则 须 对 相关 概 
念 进行 学 习 和 建构 ,从 而 实现 对 象 的 有 效 认 知 ;@ 当 现 
有 的 知识 结构 和 对 象 的 触觉 感知 基本 一 致 ,此 时 对 象 
的 扇 知 过 程 无 需 进 行 特 殊 干 预 。 此 外 ,干预 训练 机 制 
还 刻 提 供 相 应 的 反馈 功能 ,该 功能 可 在 阅读 的 实践 中 
进 舍 步 完善 和 丰富 阅读 者 的 知识 结构 ,提高 对 所 感知 
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2 干预 训练 机 制 的 流程 
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4 ”实验 与 讨论 


(上 0 为 了 验证 面向 盲人 阅读 的 触觉 交互 服务 框架 可 行 
性 5 分 析 信息 资源 在 触觉 阅读 与 理解 上 的 表现 情况 ,本 
此 设计 开发 出 面向 盲人 阅读 的 触觉 交互 实验 平台 ,可 
参见 图 3, 引 入 笔 式 触觉 再 现 设备 进行 触觉 信息 再 现 ， 
并 在 实验 过 程 中 对 视觉 辅助 信息 实现 同步 地 呈现 。 

34 名 被 试 者 是 在 南京 大 学 招募 的 师 生 ,男女 性 别 
比 1:1 ,年 龄 区 间 为 20 -35 岁 ,以 消除 因 性 别 和 年 龄 对 
实验 效果 产生 的 影响 。 在 实验 开始 前 调查 结果 可 知 : 
被 试 者 既 无 触觉 训练 背景 ,也 没有 触觉 交互 设备 的 使 
用 经 历 。 实 验 过 程 分 为 两 个 阶段 : 第 一 阶段 挑选 志愿 
者 对 触觉 阅读 的 交互 平台 的 体验 效果 进行 评估 ;第 二 
阶段 则 邀请 被 试 者 分 步骤 完成 该 平台 下 不 同 层次 信息 
资源 可 理解 性 的 实验 ,可 理解 性 主要 是 指 信 息 资源 的 
( 触 ) 知 觉 理 解 , 即 借助 于 已 有 知识 经 验 对 当前 感知 对 
象 的 意义 做 出 解释 ,并 用 词 把 它 表示 出 来 。 
4.1 实验 方法 

笔者 通过 让 志愿 者 或 被 试 者 佩戴 眼 音 来 排除 视觉 
因素 对 触觉 感知 的 影响 。 在 实验 的 过 程 中 ,操作 者 利 


图 3 面向 盲人 阅读 的 触觉 交互 服务 的 实验 平台 


用 笔 式 触觉 再 现 设备 的 笔杆 控制 虚拟 空间 的 操作 隐喻 
(本 实验 中 为 3D 小 球 ) 对 各 类 信息 资源 进行 “摸索 ”。 
实验 结束 后 ,对 于 第 一 阶段 的 实验 ,笔者 通过 问卷 的 方 
式 对 操作 者 的 阅读 体验 进行 收集 ;对 于 第 二 阶段 的 实 
验 ,笔者 则 对 操作 者 每 个 步骤 的 感知 正确 率 进 行 统计 ， 
打分 采用 10 分 制 ,每 成 功 匹配 一 个 记 2 分 ,否则 记 0 
分 。 最 后 ,通过 访谈 的 方式 与 受 试 者 交流 实验 感受 并 
进行 记录 。 
4.1.1 触觉 阅读 的 有 效 性 实验 ”在 实验 中 ,首先 让 志 
愿 者 戴 上 眼罩 ,以 避免 视觉 对 触 党 阅读 的 影响 。 其 次 ， 
在 具体 感知 的 过 程 中 ,不 进行 任何 训练 和 口头 指导 的 
情形 下 ,志愿 者 自主 地 对 虚拟 环境 中 的 信息 资源 进行 
3 -5 分 钟 的 探索 和 感知 。 实 验 结束 后 ,志愿 者 完成 问 
卷 的 填写 ,填写 的 内 容 主要 分 为 两 部 分 :一 是 志愿 者 年 
龄 ,性别 等 背景 信息 的 收集 ;二 是 触觉 阅读 效果 的 调 
查 , 主 要 涉及 的 因素 包括 触觉 对 象 的 感觉 对象 的 细节 
辨认 、 触 觉 探索 的 有 趣 性 、 深 入 探索 的 意愿 以 及 触觉 交 
互 的 友好 性 等 。 
4.1.2 信息 资源 可 理解 性 实验 ”邀请 34 名 被 试 者 参 
与 实验 ,在 实验 开始 前 ,对 被 试 者 进行 简单 的 触觉 交互 
训练 ,并 对 实验 内 容 进行 简要 说 明 。 整 个 实验 过 程 分 
成 轮廓 形状 感知 材质 感知 和 纹理 感知 3 个 不 同 层级 ， 
被 试 者 在 蒙 眼 的 情形 下 ,首先 依据 自身 现 有 知识 经 验 
对 不 同 层级 的 触觉 对 象 进行 探索 。 当 被 试 者 对 触觉 对 
象 无 法 进行 有 效 认 知 的 时 候 , 引 入 干预 训练 机 制 ,并 进 
行 第 二 轮 触觉 对 象 的 探索 。 实 验 结束 后 ,对 两 轮 触觉 
对 象 的 识别 正确 率 分 别 进行 统计 和 分 析 。 

轮廓 形状 感知 : 通过 触觉 方式 阅读 虚拟 空间 中 的 
5 种 轮廓 形状 ,分 别 是 半圆 形 .矩形 三 角形 、 梯 形 和 五 
边 形 ( 见 图 4) ,整个 实验 过 程 持 续 5 分 钟 。 实 验 结束 
后 ,被 试 者 依据 感知 体验 对 相应 的 轮廓 形状 进行 匹配 ， 
并 对 匹配 的 成 功率 进行 分 析 。 

材质 感知 : 被 试 者 对 虚拟 空间 中 5 种 不 同 的 材质 
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(a) 三 角形 轮廓 (b) 矩形 轮廓 


(c) 梯形 轮廓 


(由 五 边 形 轮廓 


4 图 像 信息 资源 的 轮廓 形状 情况 


(主要 是 对 象 的 硬度 .摩擦 信息 ) 进行 感知 ,实验 过 程 


编号 ,并 对 匹配 成 功率 进行 分 析 。 


持续 5 分 钟 ( 见 表 1) 。 实 验 结束 后 ,被 试 者 依据 感 多 表 1 图 像 信息 资源 的 材质 情况 

体验 选择 相应 材质 的 对 应 编号 ,同时 对 匹配 的 成 功率 材质 类 别 硬度 摩擦 力 

进行 分 析 。 材质 1 适中 适中 
纹理 感知 : 被 试 者 对 触觉 图 像 的 纹理 信息 (主要 uns va 26 

是 表面 的 沟 纹 信息 ) 进行 感知 ,笔者 选取 5 种 不 同 的 纹 a - : 

理财 像 进行 实验 ( 见 图 5) ,实验 过 程 持续 5 分 钟 实 uu. o yy 

slc atatim eon 

< 十 | 
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O (a) 横向 型 纹理 (b) 纵向 型 纹理 (o 轻微 型 纹理 (d) 网 状 型 纹理 (e) 颗粒 型 纹理 

S 5 ”图像 信息 资源 的 纹理 情况 

Me 分 析 与 讨论 X2 触觉 交互 平台 下 信息 资源 的 阅读 有 效 性 评价 


(5 触觉 阅读 的 有 效 性 实验 结束 之 后 ,笔者 对 志愿 者 

填 守 的 问卷 进行 统计 ,从 而 完成 对 图 像 等 信息 资源 阅 
pa ies do ta he 
息 爱 源 的 阅读 有 效 性 评价 。 调 查 结果 表明 :本 文 的 实 
验 系统 能 使 用 户 感觉 到 触觉 对 象 .满足 用 户 对 细节 的 
辨认 需求 ,并 认为 其 有 助 于 实现 对 图 片 等 信息 资源 的 
触觉 探索 。 在 满足 用 户 的 好 奇 心 以 及 展示 方式 有 趣 性 
方面 ,用 户 的 认可 度 较 高 ;但 在 人 机 交互 体验 方面 , 认 
为 体验 较 好 的 比例 不 到 80% ,总 体 的 认可 度 最 低 。 实 
验 结束 后 ,通过 对 用 户 进 行 访谈 发 现 , 笔 式 触觉 交互 方 
式 虽 然 可 以 实现 触觉 信息 的 呈现 ,但 人 机 交互 的 自然 
性 距离 人 们 的 期 望 尚 有 一 定 的 距离 ,实践 中 在 条 件 允 
许 的 情况 下 应 选用 自然 性 更 优 的 触觉 交互 设备 ,如 手 
EER IFES, 

363 是 触觉 交互 平台 下 信息 资源 可 理解 性 实验 的 
样本 统计 量 。 通 过 干预 训练 前 信息 资源 的 感知 正确 的 
均值 数据 可 以 看 出 ,轮廓 形状 .材质 和 纹理 三 者 的 均值 
得 分 依次 下 降 , 其 说 明 不 同 层级 的 信息 资源 在 触觉 阅 
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信息 资源 的 阅读 有 效 性 评价 人 数 ( 共 34 人 ) 
可 感觉 到 触觉 对 象 33 
可 感觉 到 触觉 对 象 的 形状 32 
可 感觉 到 触觉 对 象 的 软 硬 32 
可 感觉 到 触觉 对 象 的 纹理 34 
有 助 于 探索 图 片 等 信息 资源 32 
对 体验 充满 好 奇 和 兴趣 34 
人 机 交互 体验 较 好 27 


读 和 理解 的 难度 上 存在 着 差异 ,用 户 对 于 信息 资源 轮 
廓 形状 特征 的 理解 难度 较 低 ,对 于 纹理 特征 的 理解 难 
度 相对 较 高 ;同时 ,也 验证 了 前 文中 触觉 对 象 建构 时 依 
据 不 同 特征 的 理解 难度 实现 层级 划分 的 合理 性 。 

表 4 是 对 不 同 层级 信息 资源 的 可 理解 性 进行 的 配 
对 T 体 验 ,对 轮廓 形状 阅读 和 纹理 阅读 效果 进行 显著 
性 差异 判断 时 (34) =8.212, p=0.00, 就 该 结果 而 言 ， 
轮廓 形状 特征 和 纹理 特征 在 用 户 阅 读 效 果 上 具有 显著 
差异 ;对 材质 阅读 和 纹理 阅读 效果 进行 显著 性 差异 判 
断 时 (34) =4.164,p =0.00, 结 果 显 示 材 质 特征 和 纹理 
特征 在 用 户 阅读 效果 上 也 具有 显著 差异 ;最 后 ,对 轮廓 
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29. 
X3 触觉 交互 平台 下 信息 资源 可 理解 性 形状 阅读 和 材质 阅读 效果 进行 显著 性 差异 判断 ,结果 
实验 的 样本 统计 量 表明 (34) =1.089,p =0.284 >0.05 ,轮廓 形状 特征 和 
实验 样本 ”均值 M N 标准 差 SD ”均值 的 标准 误差 材质 特征 在 用 户 阅 读 效 果 上 不 存在 显著 差异 。 上 述 结 
轮廓 训 前 7.59 i sid D3 果 也 是 对 触觉 对 象 建 构 时 将 轮廓 形状 特征 、 材 质 特征 
es i e ini 列 为 第 一 层 ,纹理 特征 列 为 更 高 层 的 合理 解释 。 干 预 
纹理 训 前 4.00 34 2.256 0.387 、 PM --— 
I: y 训练 的 合理 引入 后 ,轮廓 形状 材质 和 纹理 三 者 的 感知 
轮廓 训 后 8.94 34 1.722 0.295 
m 人 x 4H x Y e 
EXE 3x : e Pu 正确 的 均值 数据 都 得 到 了 较 大 提升 ,可 参见 表 3。 结 
纹理 训 后 8.35 34 2.281 0.391 果 显 示 , 经 过 干预 训练 后 ,信息 资源 的 材质 特征 的 感知 
正确 率 最 高 ,纹理 特征 总 体 提升 的 幅度 最 大 。 
表 4 触觉 交互 平台 下 不 同 层级 信息 资源 可 理解 性 的 配对 工 检 验 分 析 
成 对 差分 
du et 
配对 样本 " v pen 差分 的 95% 置信 区 间 à E be df) 统计 显著 性 
均值 标准 差 ”均值 的 标准 误差 Sig.( 双 侧 ) 
下 限 ER 
轮廓 训练 前 - 材质 训练 前 0. 706 3.718 0. 648 -0.612 2.024 1.089 33 0. 284 
FERI | 练 前 - 纹理 训练 前 3.588 2.548 0.437 2. 699 4.477 8.212 33 0. 000 
f | 练 前 - 纹理 训练 前 2.882 4.036 0.692 1.474 4.291 4.164 33 0.000 
ES 5 为 干预 训练 前 后 不 同 层级 信息 资源 的 可 理解 训练 前 后 纹理 特征 的 阅读 效果 进行 显著 性 差异 判断 时 


HB 行 的 配对 人 检验 分 析 , 对 干预 训练 前 后 轮廓 形状 
阅读 效果 进行 显著 性 差异 判断 时 绝对 值 (34) = 
136 „p = 0. 00 ,就 该 结果 而 言 ,轮廓 形状 特征 的 用 户 
阿 话 效果 在 干预 训练 前 后 上 有 着 显著 差异 ;对 干预 训 
综 鄞 后 材质 的 阅读 效果 进行 显著 性 差异 判断 时 绝对 什 
(34) = 5.250, p =0.00, 结 果 显 示 材质 特征 的 用 户 阅 
读 痪 果 在 干预 训练 前 后 上 有 着 显著 差异 ;最 后 ,对 干预 


绝对 值 (34) = 8.780, p =0.00, 结 果 表明 ,纹理 特征 
在 用 户 阅 读 效果 上 有 着 显著 差异 。 当 自由 度 df =33， 
显著 水 平 w =0.05 时 ,临界 值 (34) =2. 032 , 而 本 次 3 
组 T 检 验 的 绝对 值 均 大 于 临界 值 , 即 认为 干预 训练 前 
后 的 匹配 成 功率 均值 存在 显著 差异 。 由 此 可 以 看 出 笔 
者 提出 的 干预 训练 机 制 对 提升 触觉 对 象 的 识别 正确 率 
具有 很 显著 的 效果 。 


R5 触觉 交互 平台 下 干预 训练 前 后 信息 资源 可 理解 性 的 配对 工 检验 分 析 
c 成 对 差分 
is 统计 显著 性 
”配对 样本 " mu E 差分 的 95% 置信 区 间 t B BUS Cdf) 统计 显著 性 
"m 均值 标准 差 ”均值 的 标准 误差 - Sig.( 双 侧 ) 
"T 下 限 上 限 
mm 练 前 - 轮廓 训练 后 -1.353 1. 889 0.324 -2.012 —0. 694 -4.176 33 0. 000 
材质 训练 前 - 材质 训练 后 -2.471 2.744 0.471 -3.428 -1.513 -5.250 33 0. 000 
纹理 训练 前 - 纹理 训练 后 -4.353 2.891 0.496 -5.362 -3.344 -8.780 33 0. 000 
通过 分 析 讨 论 可 以 发 现 ,笔者 依据 触觉 交互 服务 。 架 , 通 过 对 触觉 认 知 规律 Nb MUN EA 
框架 构建 的 触觉 交互 实验 平台 能 基本 满足 用 户 对 触觉 ” 述 了 触觉 对 象 构建 .触觉 智能 交互 和 触觉 信息 呈现 等 


对 象 的 感知 ,探索 和 阅读 需求 ;轮廓 材质、 纹理 等 不 同 
层级 的 信息 资源 在 触觉 阅读 和 理解 难度 方面 存在 的 差 
异 也 验证 了 触觉 对 象 建构 时 采用 特征 分 类 、 层 级 划分 
思路 的 合理 性 ;而 当 感 知 到 的 触觉 对 象 无 法 被 用 户 有 
效 理解 和 认 知 时 ,干预 训练 机 制 的 引入 有 效 地 提升 了 
操作 者 对 信息 资源 的 感知 和 识别 能 力 ,是 对 视 障 用 户 
触觉 交互 阅读 服务 效果 的 良好 保证 。 


5 结论 与 展望 


言 人 阅读 中 的 关键 问题 ,并 通过 寺 实 验 对 文字 、 图 像 和 图 
形 等 信息 资源 的 触觉 再 现 。 实 验 显示 :笔者 实现 的 触 
觉 交 互 平台 在 信息 资源 的 盲人 阅读 方面 表现 出 良好 的 
沉浸 感 .交互 性 和 可 行 性 ;同时 验证 了 不 同 层 级 的 触觉 
言 息 资源 在 阅读 和 理解 的 难 易 程度 上 存在 着 差异 。 在 
言 息 资源 的 阅读 过 程 中 , 当 触 觉 对 象 无 法 被 有 效 认 知 
时 ,合理 地 引入 认 知 训练 机 制 可 有 效 提升 操作 者 对 信 
息 资源 的 感知 和 识别 能 力 。 不 足 之 处 在 于 笔者 开展 的 
言 息 资 源 的 阅读 的 有 效 性 和 可 理解 性 实验 是 通过 用 户 


笔者 提出 一 种 面向 盲人 阅读 的 触觉 交互 服务 框 


佩戴 眼罩 模拟 视 障 群体 阅读 方式 来 排除 视觉 因素 对 触 
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觉 感知 影响 的 ,被 试 若 选择 视 障 群体 ,实验 结果 的 科学 
性 进一步 提升 ,实验 结果 才 会 更 有 说 服 力 ;年 龄 等 因素 
可 能 对 实验 的 结论 具有 一 定 影响 ,不 同年 龄 阶段 人 群 
的 认 知 能 力 .触觉 力 觉 控制 可 能 存在 差异 。 

笔者 将 新 型 的 触觉 交互 模 态 融入 到 盲人 阅读 , 利 
用 感官 通道 间 的 增益 、 互 补 效 果 , 助 力 视 障 用 户 克 服 信 
息 资源 可 感知 方面 的 障碍 , 较 好 地 提升 了 数据 资源 和 
服务 的 可 访问 性 ,促进 了 公共 文化 服务 的 公平 供给 。 
在 实践 上 ,探索 了 三 维 情境 下 数据 资源 的 (视听 和 触 ) 多 
模 态 呈现 和 自然 交互 ,构建 了 较为 完备 的 框架 方法 体 
系 ,研究 成 果 可 为 图 博 档 等 社会 文化 领域 研究 和 实践 
活动 提供 参考 借鉴 。 

后 续 的 研究 将 主要 围绕 触觉 图 像 的 分 层 感 知 算 
法 < 多 层次 交互 操作 构建 以 及 不 同 级 别 ( 盲 、 低 视力 
千 也 不同 致 育 原 因 (先天 ,后 天 ) 和 不 同年 齿 阶 段 ( 儿 
童 ( 青 年 .中 老年 等 ) 的 视 障 人 群 触觉 阅读 的 实验 对 比 
其 工作 ,从 而 实现 对 盲人 触觉 阅读 和 信息 资源 认 知 
规 各 的 探索 。 
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Construction and Usage of Haptic Interaction Services for Blind Reading 
Qi Binbin Hu Yuning Zhu Xuefang Zhu Qinghua 
School of Information Management , Nanjing University , Nanjing 210023 


~ Abstract; | Purpose/ significance | In the promotion process of the civil reading, it is of great social significance to 
meet the reading needs of visually impaired people and ensure their reading rights. With the advent of the Internet era, 
people' s reading habits and interests begin to expand from traditional texts to diversified forms, such as words, images 
and graphics. [ Method/ process | In this paper, the related problems of blind reading are discussed and a novel tactile 
interaction framework for blind reading is presented. The tactile cognition and perceived characteristics is firstly analyzed 
and then a set of the key issues about blind reading are elucidated. By introducing a typical force feedback device to build 
a tactile interaction system, the experiment is comprised of two stages: the effectiveness of tactile reading and the compre- 
hensibility of information resources at different levels. [ Result/conclusion | Experimental results showed that the tactile 
interaction system has excellent performances in immersion, interactivity and feasibility. It is proved that there are differ- 
ences in the difficulty of tactile reading and comprehensibility of information resources at different levels, and the rational 
introduction of cognitive training mechanism can effectively improve the operator' s perception and recognition ability. 
Keywords. digital information resources blind reading haptic interaction haptic object construction interven- 
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